第一次使用hadoop，另外eclipse也不太熟悉，現在把自己在安裝過程中得瑣碎問題記錄下來。 eclipse版本：eclipse-jee-indigo-SR2-linux-gtk.tar.gz ...

眾所周知，Hadoop對處理單個大文件比處理多個小文件更有效率，另外單個文件也非常占用HDFS的存儲空間。所以往往要將其合並起來。 1，getmerge hadoop有一個命令行工具getmerg ...

1.streaming的作用 Haoop支持用其他語言來編程，需要用到名為Streaming的通用API。 Streaming主要用於編寫簡單，短小的MapReduce程序，可以通過腳本語言編程， ...

文章轉自：http://blog.csdn.net/heyutao007/article/details/5890103 趁這個時候，順便把hadoop的用於比較的Writable, Writabl ...

簡單的pageRank實現參考：http://wlh0706-163-com.iteye.com/blog/1397694 較為復雜的PR值計算以及在hadoop上的實現：http://deaths ...

全部程序如下： import java.io.IOException; import java.net.URI; import java.net.URISyntaxException; impor ...

首先明確： 1.Hadoop不支持全局變量，也不建議使用全局變量。 我的理解是，這是因為hadoop具有map類和reducer類，並且不同的task一般執行的是不同的map或reduce。 ...

hadoop命令的使用： Usage: hadoop [--config confdir] COMMAND 這里COMMAND為下列其中一個： <span style="font-siz ...

1.單個文件的壓縮或解壓 import java.io.FileInputStream; import java.io.FileOutputStream; import java.io.IOExce ...